Le surnom a pour origine le morceau composé et arrangé par Jimmy Giuffre et enregistré par Woody Herman et son orchestre à Hollywood le . - Giuffre donna à ce morceau le titre de Four Mothers pour motherfuckers mais Herman le remplaça par le plus convenable Four Brothers.